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摘 要 : ”对 等 传输 (P2P) 内容 分 发 系统 能 大 幅 减 轻 对 等 传输 内 容 提 供 商 的 分 发 代价 ， 提 高 系统 的 可 扩展 
性 。 但 是 ， 履 盖 网 络 和 底层 网 络 的 不 匹配 导 任 了 网 络 资源 的 浪费 ， 产 生 了 大 量 的 元 余 流量 ， 激 化 了 内 容 提 
供 商 和 网 络 运营 商 〈ISP) 之 间 的 了 矛盾。 因此， 如 何 有 效 利用 底层 网 络 的 带宽 资源 ， 降 低 对 等 传输 内 容 分 发 
系统 对 ISP 网 络 的 流量 压力 ， 是 目前 对 等 传输 内 容 分 发 系统 研究 的 热点 ， 也 是 对 等 传输 系统 可 持续 发 展 的 
关键 。 本 文 从 对 等 传输 缓存、 位置 感 知 技术 和 数据 调度 算法 三 个 维度 出 发 详细 阐述 了 不 同 的 对 等 传输 流量 
优化 技术 ， 探 讨 了 各 种 技术 的 适用 环境 ， 指 出 了 存在 的 问题 和 未 来 的 方向 。 


关键 词 : ”对 等 传输 流量 本 地 化 、 对 等 传输 流量 优化 、 对 等 传输 缓存 、 位 置 感知 、 网 络 编码 、 网 络 拓扑 
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近年 来 , 基于 对 等 传输 (peer-to-peer, P2P) 模 式 的 内 容 分 发 系统 获得 了 用 户 广 泛 的 青睐 ， 
如 Kazaa、Gnutella、Emule、BitTorrent、PPLive、PPStream 等 。 较 之 传统 的 客户 /服务 器 模 
式 或 内 容 分 发 网 络 (CDN) 模式 ， 对 等 传输 内 容 分 发 模式 大 大 降低 了 内 容 提 供 商 的 分 发 代 
价 ， 增 强 了 系统 的 可 扩展 性 。 


但 是 ， 对 等 传输 应 用 产生 的 巨大 流量 成 为 了 制约 其 进一步 发 展 的 瓶颈 。 测 量 表明 ， 对 等 
全 传输 流量 已 经 超越 Web， 成 为 网 络 流量 的 最 主要 贡 献 者 。 目 前 ， 在 终端 用 户 、 对 等 传输 内 容 
提供 商 和 网 络 运营 商 〈ISP) 构成 的 三 角 中 ， 前 两 者 都 从 对 等 传输 应 用 的 普及 中 获 益 良 多 。 
> 终端 用 户 提高 了 下 载 的 速度 ,内容 提 供 商 降低 了 分 发 代价 。 网 络 运营 商 则 成 为 了 唯一 的 受害 

者 .网 络 运 营 商 为 网 络 带宽 所 做 的 扩容 被 对 等 传输 应 用 无 情 地 消耗 , 导致 投资 无 法 获得 收益 。 
二 此 外 , 对 带宽 的 过 度 占 用 影响 了 其 它 业务 的 正常 运行 。 虽然 网 络 运营 商 可 以 通过 提高 用 户 的 
r 资费 来 平衡 其 投入 /收益 比 ， 但 这 又 面临 着 流失 用 户 的 潜在 危险 。 


对 等 传输 产生 巨大 流量 的 一 个 原因 在 于 没有 有 效 地 利用 底层 的 资源 , 造成 了 大 量 的 资源 
浪费 。 因 此 ， 优 化 对 等 传输 的 流量 成 为 缓解 、 消 除 内 容 提 供 商 和 网 络 运 营 商 之 间 紧 张 关系 的 
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唯一 途径 。 对 等 传输 的 流量 包括 控制 流 和 数据 流 两 部 分 ， 其 中 , 实际 的 数据 传输 居 对 等 传输 
网 络 流量 的 主导 地 位 。 因 此 ， 优 化 实际 的 数据 传输 是 关键 。 


内 容 提供 商 和 网 络 运 营 商 为 解决 对 等 传输 产生 的 巨大 流量 问题 所 做 的 努力 大 致 可 分 为 

三 个 阶段 : 对 抗 、 各 自 为 战 和 合作 共 赢 。 在 对 抗 阶段 , 网 络 运营 商 采取 深度 包 检 测 (DPI, Deep 
Packet Inspection ) 等 技术 对 对 等 传输 流量 进行 识别 ， 从 而 对 对 等 传输 流量 进行 封 堵 、 限 速 、 
整形 。 作 为 应 对 ， 对 等 传输 内 容 提供 商 利用 动态 端口 、 消 息 加 密 等 机 制 来 隐藏 流量 。 这 导致 
了 类 似 病毒 和 反 病 毒 的 恶性 循环 ， 业 界 戏称 其 为 双方 的 一 场 “ 战 争 ” 在 第 二 阶段 ， 双 方 都 
采取 了 一 些 积 极 措 施 来 优化 网 络 资源 的 使 用 ,内 容 提 供 商 依据 反 向 工程 的 方法 来 推测 底层 的 
拓扑 结构 和 网 络 状态 信息 ， 并 依据 这 些 信 息 来 辅助 建立 与 底层 网 络 匹配 的 覆盖 网 拓扑 ， 从 而 
是 高 带宽 资源 的 利用 率 。 网 络 运营 商 则 通过 对 对 等 传输 流量 进行 缓存 ， 或 通过 Proxy-Tracker 

《代理 -追踪 器 ) 等 技术 来 影响 对 等 传输 覆盖 网 拓扑 的 建立 ， 达 到 优化 网 络 资源 利用 的 目的 。 
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第 三 阶段 ,内容 提供 商 和 网 络 运营 商 开 始 尝 试 以 合作 的 方式 来 优化 网 络 资源 的 使 用 , 即 由 网 
络 运 营 商 提供 网 络 拓 扑 和 状态 信息 的 服务 , 而 内 容 提供 商 通过 访问 这 些 服务 来 优化 其 拓扑 建 
立 和 数据 调度 。 在 该 架构 下 ， 网 络 运营 商 可 以 控制 提供 的 网 络 拓扑 和 状态 信息 的 粒度 ， 隐 藏 
必要 的 私密 信息 ， 并 可 通过 提供 服务 获得 收益 。 而 内 容 提 供 商 可 以 通过 该 服务 获得 准确 的 位 
置信 息 , 从 而 优化 其 资源 调度 , 减少 了 拓扑 探测 的 开销 , 也 避免 了 被 网 络 运营 商 封 堵 的 危险 。 


对 等 传输 流量 优化 主要 包括 三 类 技术 : 对 等 传输 缓存 技术 、 位 置 和 拓扑 感知 技术 、 数 据 
调度 算法 。 本文 将 以 此 为 出 发 点 , 深入 剖析 和 比较 这 三 类 技术 。 在 详细 介绍 这 三 类 技术 之 前 ， 
首先 对 对 等 传输 内 容 分 发 系统 进行 简单 的 分 类 。 


2 “对 等 传输 内 容 分 发 系统 分 类 


按 所 分 发 内 容 的 性 质 ， 对 等 传输 内 容 分 发 系统 可 分 为 非 实 时 文件 分 发 系统 (如 Gnutella、 
Kazaa、BitTorrent) 和 实时 流 媒 体 分 发 系统 (如 PPLive、PPStream)。 按 对 等 传输 网 络 的 结构 ， 
则 可 分 为 非 结 构 化 的 对 等 传输 和 结构 化 的 对 等 传输 。 结 构 化 对 等 传输 建立 在 分 布 式 哈 希 
(DHT) 技 术 之 上 ， 其 优点 是 搜索 代价 低 ， 缺 点 是 网 络 的 维护 代价 高 ， 也 不 能 有 效 支 持 基于 关 
键 词 的 模糊 查询 ,因此 在 内 容 分 发 系统 中 并 没有 获得 广泛 的 应 用 。 目 前 对 等 传输 系统 的 主要 
流量 都 来 自 于 非 结构 化 对 等 传输 应 用 。 在 非 结 构 化 的 对 等 传输 中 , 按照 所 采用 的 技术 和 出 现 
时 间 先 后 ， 又 可 以 大 致 分 为 三 代 。Napster 是 第 一 代 对 等 传输 内 容 分 发 系统 的 典型 代表 ， 它 
包含 一 个 集中 的 索引 服务 器 ;第 二 代 包 括 完全 分 布 式 的 Gnutella， 以 及 混合 式 的 Gnutella 和 
Kazaa 等 ; 第 三 代 包 括 文件 分 发 系统 BitTorrent， 实 时 流 媒 体 播放 系统 PPLive 等 。 然 而 ， 虽 
然 都 采用 了 对 等 传输 技术 ，Gnutella, BitTorrent 和 PPLive 也 有 着 显著 的 区 别 。BT 和 PPLive 
与 Kazaa 的 最 大 区 别 在 于 : 在 BT 或 PPLive 中 ， 一 个 节点 只 需 下 载 整个 文件 的 一 部 分 就 可 
以 向 其 它 节点 提供 服务 。 其 覆盖 网 络 既 是 控制 信息 的 载体 ， 也 是 实际 数据 传递 的 载体 。 而 在 
Kazaa 中 ， 上 只 有 拥有 完整 文件 数据 的 节点 才能 向 其 它 节 点 提供 下 载 服务 。 即 ， 履 盖 网 只 作为 
控制 信息 的 载体 , 而 实际 的 数据 下 载 并 不 依赖 于 覆盖 网 络 ， 下 载 过 程 亦 不 存在 合作 网 络 的 概 
念 。 后 面 我 们 将 看 到 , 不 同 的 对 等 传输 流量 优化 技术 对 这 两 种 不 同 的 对 等 传输 文件 分 发 模式 
有 不 同 的 适用 性 。 


3 ”对 等 传输 缓存 技术 


缓存 技术 是 网 络 运 营 商 用 于 缓解 流量 压力 、 缩 短 用 户 响 应 时 间 的 一 种 方案 , 最 早 被 广泛 
用 于 Web 服务 。 随 着 对 等 传输 流量 的 激增 ， 对 其 进行 缓存 成 为 网 络 运营 商 缓解 流量 压力 的 
首选 。 但 是 ， 对 等 传输 与 Web 具有 不 同 的 流量 特征 ， 而 且 两 者 缓存 设计 的 目标 也 不 同 。 网 
页 (web) 缓存 设计 的 一 个 主要 目标 是 缩短 用 户 感知 的 响应 时 间 ， 而 对 等 传输 缓存 的 主要 设 
计 目 标 是 降低 网 络 流量 。 网 页 缓存 一 般 以 对 象 命中 率 (hit ratej] 和 用 户 的 平均 响应 时 间作 为 组 
存 算 法 的 评价 指标 ， 而 对 等 传输 缓存 则 一 般 以 字 节 命中 率 (byte hit rate) 作 为 评价 指标 。 因此 ， 
应 根据 对 等 传输 的 流量 特征 和 缓存 设计 目标 为 对 等 传输 应 用 量 身 定制 高 效 的 缓存 算法 。 


3.1 对 等 传输 流量 特征 
对 等 传输 应 用 的 流量 特性 与 传统 的 Web 流量 存在 显著 的 差别 ， 如 表 1 所 示 。 


两 种 应 用 流量 特征 的 不 同 对 缓存 设计 的 不 同方 面 有 着 不 同 程度 的 影响 。 例 如 对 象 大 小 、 
对 象 流行 度 是 影响 缓存 效率 的 主要 因素 ， 而 协议 开放 性 则 影响 缓存 的 实现 复杂 度 和 可 扩展 
性 。 
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表 1. 对 等 传输 流量 和 Web 流量 的 主要 区 别 


对 等 传输 Web 


对 象 大 小 


大 致 包含 三 个 级 别 的 负载 : 10M 以 下 的 小 文 | 一 般 都 比较 小 
件 ， 几 百 兆 的 中 等 文件 ， 大 于 1G 的 大 型 文件 


对 象 流行 度 


流行 度 不 服从 齐 普 夫 定律 *， 最 流行 的 对 象 的 | 流行 度 服 从 齐 普 夫 定 律 
流行 度 远 远 低 于 齐 普 夫 定 律 的 预测 结果 
流行 度 会 发 生 突变 。 对 象 可 能 会 在 一 夜 之 间 变 | 对 象 的 流行 度 变化 比较 平稳 


对 多 流行 度 本 /| 得 流行 ， 并 在 短 时 间 内 流行 度 迅速 下 降 
对 萌 可 变性 ”| 对 象 不 可 变 过来 越 多 的 可 变 对 旬 
用 户 获取 次 数 | 大 部 分 对 象 用 户 只 获取 一 次 间 一 对 象 用 户 可 以 多 次 访 
下 载 一 个 对 象 | 可 以 同时 开户 效 十 个 会 话 一 个 或 少数 及 个 会话 
的 会 话 数 
会 话 持续 时 间 可 能 持续 效 小 上 会 语 通 党 在 几 秒 内 完成 
协议 开放 性 ”| 大 量 的 私有 访 议 基于 HTTP 的 标准 协议 
端口 。 不同 的 网 络 有 不 同 的 端口 单个 端口 《80) 


3.2 对 等 传输 缓存 算法 


缓存 算法 包含 
即 当 缓 存 空 间 不 够 


两 个 核心 问题 : (1 缓存 全 部 对 象 还 是 缓存 部 分 对 象 ? (2) 绥 存 替 换算 法 
时 ， 如 何 替换 缓存 对 象 ? 


在 网 页 缓存 中 
于 对 象 可 能 非常 


， 由 于 对 象 通常 都 较 小 , 因此 一 般 都 缓存 整个 对 象 。 而 在 对 等 传输 系统 中 ， 
大 , 如 果 缓 存 整个 对 象 , 那么 一 个 缓存 中 能 够 缓存 的 对 象 个 数 将 非常 有 限 ， 


这 可 能 会 降低 缓存 
为 很 好 的 选择 。 


缓存 替换 算法 


的 效果 。 因 此 ， 将 对 象 分 块 或 分 段 ， 让 缓存 系统 仅 缓存 对 象 的 一 部 分 就 成 


是 决定 缓存 效率 的 男 一 个 主要 因素 。 传 统 的 绥 存 罕 换 算法 包括 LRU( 最 久 


未 使 用 )、LFU( 最 近 最 少 使 用 )、MINS( 最 小 对 象 大 小 )、MAXS( 最 大 对 象 大 小 ) 等 。 但 这 些 算 


法 无 法 很 好 地 适用 
算法 ， 在 进行 对 象 
对 等 传输 系统 


指导 意义 。 调 查 表 


在 5-10 周 内 流行 度 会 降低 到 1/6™。 这 意味 着 , 如 果 采 用 LFU 等 根据 访问 频率 的 缓存 替换 算 
它们 流行 度 降 低 后 的 很 长 一 段 时 间 继 续 采 在 缓存 中 ， 导 致 缓存 效率 低下 。 


法 ， 这 类 对 象 会 在 


于 对 等 传输 系统 。LSB(Least-Sent-Byte)P 是 一 种 针对 对 等 传输 的 缓存 替换 
替换 时 ， 总 是 替换 给 用 户 提供 的 字 节 数 最 少 的 那些 对 象 。 
中 对 象 的 流行 度 和 流行 时 间 与 传统 的 网 页 对 象 不 同 , 这 也 对 设计 缓存 具有 
明 ， 对 等 传输 对 象 的 流行 度 会 在 短 时 间 内 达到 顶峰 ， 随 后 开始 迅速 下 降 ， 


男 一 方面 ， 对 象 的 流行 时 间 并 非 十 分 短暂 ， 通常 在 2-3 个 月 左右 。 这 表明 可 以 通过 缓存 部 分 
对 象 的 方法 逐步 增加 对 象 被 缓存 的 比例 , 使 缓存 系统 有 充足 的 时 间 来 建立 对 象 流行 度 的 档案 
信息 。 这 样 ， 绥 存 系统 就 可 以 识别 出 真正 流行 的 对 象 ， 并 逐步 增加 其 缓存 的 比例 直到 整个 对 


象 都 被 缓存 为 止 。 


3.3 对 等 传输 缓存 技术 存在 的 问题 


虽然 对 等 传输 缓存 技术 是 网 络 运 营 商 目前 进行 对 等 传输 流量 优化 的 首选 方案 , 但 它 也 存 


“ 齐 普 夫 〈Zipf) 定律 是 美国 学 者 GK. 齐 普 夫 于 本 世纪 40 年 代 提出 的 词 频 分 布 定 律 。 它 可 以 表述 为 : 


如 果 把 一 篇 较 长 文章 
并 用 自然 数 给 这 些 记 


中 每 个 词 出 现 的 频次 统计 起 来 ， 按 照 高 频 词 在 前 、 低 频 词 在 后 的 递减 顺序 排列 ， 
编 上 等 级 序号 ， 即 频次 最 高 的 词 等 级 为 1， 频 次 次 之 的 等 级 为 2，.……， 频 次 最 


小 的 词 等 级 为 D 。 若 


] f 表示 频次 , r+ 表示 等 级 序号 ， 则 有 fxr 三 C(C 为 常数 )。 符 合 这 一 定律 的 概率 分 
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在 下 述 问 题 : 
1. 有 效 性 


只 有 当 对 等 传输 节点 的 位 置 感知 能 力 不 强 时 ,对 等 传输 缓存 技术 的 效果 才 会 较 好 。 但 随 
着 对 等 传输 节点 位 置 感知 能 力 的 提高 ， 对 等 传输 缓存 的 有 效 性 将 相应 地 下 降 。 
2. 可 扩展 性 
于 每 种 对 等 传输 系统 都 采用 不 同 的 协议 , 有 些 其 至 是 不 公开 的 私有 协议 , 限制 了 对 等 
传输 缓存 系统 的 扩展 性 。 为 了 对 一 种 新 的 对 等 传输 应 用 系统 的 流量 进行 缓存 , 必须 首先 了 解 
该 对 等 传输 应 用 的 协议 细节 ， 这 增加 了 实现 的 复杂 性 ， 降 低 了 系统 的 扩展 性 。 与 之 相 较 ， 
Web 应 用 基于 开放 的 协议 ， 使 得 网 页 缓存 具有 通用 性 ， 实 现 要 容易 得 多 。 
3. 版 权 问题 
虽然 网 页 缓存 也 存在 版 权 问题 , 但 由 于 对 等 传输 内 容 分 发 系统 分 发 对 象 的 版 权 敏感 性 更 
强 ， 因 此 版 权 问题 显得 尤为 突出 。 对 等 传输 缓存 系统 应 小 心 避 免 触犯 任何 版 权 保护 法 例 。 需 
要 注意 的 是 , 在 中 国 至 今 仍然 没有 明确 的 相关 法 律 法 规 。 在 全 球 范围 内 对 相关 问题 有 明确 界 
定 的 也 仅仅 是 美国 的 《 千 禧 年 数字 版 权 法 (DMCA)》， 因 此 在 缓存 系统 的 数字 版 权 保护 方面 ， 
留 下 了 极 大 的 灰色 地 带 中 。 
4. 利益 格局 问题 


对 等 传输 缓存 违背 了 整个 网 络 的 运营 模式 , 网 络 运 营 商 部 署 对 等 传输 缓存 是 不 得 已 而 为 
之 的 无 奈 之 举 ， 无 法 从 根本 上 解决 网 络 运 营 商 和 对 等 传输 内 容 提 供 商 之 间 的 矛盾 。 


4 ”位 置 感知 技术 


对 等 传输 网 络 是 构建 于 底层 网 络 全 
之 上 的 履 盖 网 ， 它 与 底层 网 络 之 间 的 | 
So 


匹配 程度 很 大 程度 上 决定 了 对 等 传输 


= 节点 对 底层 网 络 资源 的 使 用 行为 。 早 (8 
rr 期 的 对 等 传输 网 络 采 用 随机 的 方式 选 


择 邻 居 ， 导 致 构建 出 的 覆盖 网 与 底层 (a) 
te We hn 
Da 图 1 两 种 对 等 传输 拓扑 构建 方式 


个 仅 降低 了 应 用 层 的 性 能 ， 也 号 至 了 四 基于 位 置 感知 技术 构建 的 对 等 传输 网 络 : 


大 量 的 元 余 流 量 。 图 1 是 采用 位 置 感 
基于 随机 邻居 ; 为 建 的 对 等 传输 网 


构建 出 的 覆盖 网 示例 。 采 用 随机 方式 构建 出 来 的 覆盖 网 络 与 底层 网 络 可 能 会 出 现 严重 的 不 匹 
配 , 因而 在 应 用 层 数据 传输 时 会 产生 很 多 的 长 距离 传输 , 浪费 宝贵 的 带宽 资源 。 测量 显示 中 ， 
在 Gnutella” 网 络 中 ， 只 有 2-5% 的 连接 是 位 于 同一 自治 系统 (Autonomous System, AS) 内 部 的 ， 
日 超过 40% 的 Gnutella 节点 是 位 于 最 大 的 10 个 自治 系统 中 ， 这 表明 Gnutella 网 络 基 本 不 具 
备 位 置 感知 能 力 。 利 用 位 置 感知 技术 , 可 以 使 构建 出 的 覆盖 网 络 和 底层 拓扑 在 路 由 层 具 备 
致 性 ， 如 图 1(a) 所 示 ， 底 层 网 络 相近 的 节点 之 间 连 接 更 为 紧密 ， 从 而 达到 优化 网 络 资源 的 有 
的 。 


也 | 


~ 


? 一 种 文件 共享 网 络 
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上 述 例子 表明 , 构建 一 个 与 底层 网 络 拓扑 匹配 的 覆盖 网 对 于 改善 对 等 传输 系统 的 性 能 和 

降低 对 网 络 的 流量 压力 至 关 重 要 。 这 涉及 两 方面 的 研究 内 容 : 一 是 如 何 获取 和 提供 位 置 感知 
信息 ， 二 是 如 何 利用 位 置 感知 信息 来 辅助 拓扑 构建 。 


4.1 位 置 感知 信息 的 获取 


位 置 感知 的 目的 在 于 预测 节点 之 间 的 网 络 距离 或 对 候选 节点 的 邻近 度 进行 估计 。 依 据 所 
采用 技术 的 实时 性 ， 可 以 分 为 实时 和 非 实 时 的 方法 。 


4.1.1 基于 实时 测量 的 位 置 感知 技术 


根据 是 否 采用 网 络 坐标 的 形式 , 基于 实时 测量 的 位 置 感知 技术 可 分 为 非 坐标 的 位 置 感知 
技术 和 基于 网 络 坐标 的 位 置 感知 技术 。 


非 坐标 的 位 置 感知 技术 可 以 依赖 新 建 的 专用 基础 设施 (如 IDMaps 和 Binning), 或 利用 现 
有 的 网 络 基础 设施 (如 域名 系统 和 内 容 分 发 网 络 ) 来 感知 节点 之 间 的 相对 网 络 距离 或 邻近 度 。 


IDMapsI9 包 括 追 踪 服 务 器 Tracer 和 地 址 前 绥 (AP， 
Address Prefix) 两 个 概念 。Tracer 是 一 组 分 布 在 整个 
Internet 上 的 专用 测量 服务 器 。Tracer 周期 性 地 测量 节 
点 间 的 时 延 ， 同 时 也 测量 到 与 之 地 址 前 绥 邻 近 的 节点 
的 时 延 。 需 要 访问 IDMaps 提供 的 服务 的 客户 端 收集 
所 有 这 些 时 延 信 息 ， 构 建 一 张 由 Tracer 和 地 址 前 级 组 
成 的 互联 网 的 虚拟 拓扑 图 (如 图 2 所 示 ), 并 基于 该 虚拟 
拓扑 图 估算 任意 两 个 卫 地 址 的 时 延 。 具 体 而 言 ， 对 给 
定 的 两 个 IP 地 址 ， 其 时 延 估 计 值 为 这 两 个 IP 地 址 所 
属 的 AP 到 各 自 最 近 的 Tracer 的 时 延 与 这 两 个 Tracer 
的 时 延 之 和 。 Tracer: 测量 服务 器 


AP: Address prefix， 地 址 前 级 
文献 [7] 提 出 的 装 箱 方法 (Binning) 是 一 种 基于 地 标 

节点 的 测量 方法 。 设 地 标 节 点 为 L1, 52,…., Lk。 当 节点 
P 加 入 系统 时 ， 首 先 测量 与 这 kk 个 地 标 节 点 的 延迟 
11, 12,.…, 不 。 对 应 得 到 其 他 节点 相对 一 个 地 标 节 点 延迟 大 小 顺序 的 一 个 排列 工 1 2 LL23,.…, Lk’。 
该 排列 本 身 就 可 以 作为 节点 的 一 个 分 类 依据 。 如 果 节 点 Pl 和 P2 经 过 上 述 测量 和 排序 得 到 
了 相同 的 地 标 节 点 排列 ， 则 将 Pl1 和 P2 归 为 同一 类 。 这 是 因为 拓扑 上 相近 的 节点 到 不 同 的 
地 标 节点 应 具有 相似 的 延迟 ， 因 而 对 应 的 地 标 节点 排序 也 相同 。 在 地 标 节点 的 排序 基础 上 ， 
还 可 对 延迟 的 绝对 值 进行 等 级 划分 ， 以 获得 更 细 粒 度 的 分 类 。 


华盛顿 大 学 (University of Washington ) 开发 的 工具 Kingg 利 用 现 有 的 域名 解析 系统 

(DNS) 体系 架构 进行 时 延 预 测 ， 其 优点 在 于 无 需 部 署 额外 的 测量 平台 ， 也 不 需要 对 现 有 的 
协议 体系 做 任何 修改 。King 的 具体 工作 方式 如 下 : 任意 给 定 两 个 节点 A 和 B， 首 先 找到 与 
A 和 B 邻近 的 权威 名 字 服 务 器 NS(A) 和 NS(B)， 然 后 依靠 域名 解析 系统 的 递归 查询 来 获取 
NS(A) 和 NS(B) 之 间 的 时 延 , 并 将 该 时 延 作为 节点 A 和 B 之 间 的 时 延 估 计 。 图 3 给 出 了 King 
的 工作 流程 示意 图 。 为 了 避免 域名 解析 服务 器 从 域名 体系 结构 的 根 服务 器 开始 逐 级 查询 , 在 
测量 时 延 前 , 需要 先进 行 一 次 预 解析 , 使 得 域名 服务 器 NS(A) 得 以 缓存 NS(B) 的 地 址 。 但 是 ， 
并 非 所 有 的 权威 服务 器 都 与 目标 主机 是 邻近 的 ， 因 此 该 方法 可 能 会 产生 无 法 忽视 的 误差 。 
Turbo KingM 对 此 进行 了 改进 ， 降低 了 误差 范围 同时 克服 了 King 导致 的 大 规模 域名 解析 系 
统 缓存 污染 问题 。 


图 2. IDMaps 的 结构 


对 等 传输 流量 优化 技术 研究 


文献 [10] 提 出 了 一 种 基于 内 容 分 发 网 络 的 信息 重用 方法 来 预测 两 个 节点 的 邻近 度 。 内 容 
分 发 网 络 使 用 动态 域名 解析 系统 重 定向 技术 为 客户 提供 低 延 迟 的 镜像 服务 器 , 这 使 得 我 们 可 
以 通过 利用 现 有 内 容 分 发 网 络 基础 设施 的 重 定向 行为 实现 较 优 化 的 节点 选择 。 这 种 方案 假定 
任何 两 个 具有 相似 的 重 定向 行为 的 节点 有 很 高 的 概率 是 邻近 的 , 如 : 有 较 大 的 可 能 属于 同一 
个 网 络 运营 商 。 


基于 网 络 坐 标的 位 置 感知 技术 的 基本 原理 是 将 和 和 冰 主 机 问 的 实际 延 时 直 
网 络 中 所 有 节点 依据 网 络 距离 (可 以 是 延迟 .带宽 和 证 

丢 包 率 等 ) 构 成 的 空间 嵌入 到 一 个 虚拟 的 空间 ， 并 为 
网 络 中 的 每 个 节点 赋 一 个 虚拟 空间 中 的 坐标 ,之 后 ， 
任何 两 个 节点 之 间 的 网 络 距离 (如 往返 时 间 ) 便 可 根 | ze.-.-.-.-.-. 
据 节点 的 虚拟 坐标 (如 坐标 之 问 的 欧 氏 距离 ) 进 行 计 King 估 计 的 延 时 
确定 延迟 而 需要 付出 的 额外 探测 开销 ， 增 强 了 区 | 

络 相对 位 置 感知 系统 的 扩展 性 。 例 如 美国 卡 内 基 梅 。 。 四 3 King 全 作用 和 

隆 大 学 开发 的 GNPG2 是 一 种 基于 静态 地 标 节点 的 0 

网 络 坐 标 系统 ， 另 外 还 有 基于 动态 地 标的 网 络 坐 标 系统 ， 如 美国 麻 省 理工 学 院 开发 的 
VivaldLDH。 


4.1.2 非 实 时 的 位 置 感知 技术 


非 实 时 位 置 感知 技术 主要 是 基于 IP 地 址 结构 进行 邻近 性 估计 。 互 联网 是 基于 IP 地 址 前 
级 进行 路 由 。 每 个 IP 地 址 都 对 应 了 一 个 或 多 个 可 路 由 的 IP 地 址 前 经 ， 可 表示 为 a.b.c.d/l，1 
表示 前 级 长 度 。 但 如 果 没 有 路 由 系统 的 信息 支持 ， 节 点 无 法 获知 一 个 IP 地 址 的 确切 前 级 长 
度 。 传 统 的 全 球 可 路 由 的 单 播 IP 地 址 包含 A、B、C 三 类 ， 节 点 可 以 简单 地 根据 IP 地 址 而 
定 所 属 的 类 别 ， 从 而 确定 自身 的 前 绥 长 度 为 8、16 或 24。 但 是 由 于 子 网 技术 和 无 类 域 间 路 
| 选择 (classless inter-domain routing，CIDR) 技术 的 广泛 使 用 ， 使 得 上 述 方法 在 准确 度 和 
粒度 上 都 存在 不 少 问题 。 


人 一 个 更 恰当 的 方案 是 利用 路 由 系统 的 信息 。 路 由 表 保存 了 从 该 路 由 器 可 见 的 所 有 IP 地 
< 二 址 前 级 信息 。 存 在 两 类 路 由 表 : 用 于 自治 系统 域 间 路 由 的 边界 网 关 协 议 (Border Gateway 
9 Protocol, BGP) 路 由 表 和 用 于 自治 系统 内 部 的 域内 路 由 表 。 通 常 ， 域 内 路 由 表 对 本 域 的 路 | 


条 目 具 有 更 细 的 粒度 。 但 网 络 运营 商 一 般 不 愿 公开 自己 的 域内 路 由 表 , 因为 这 被 视 作 隐私 信 
县。 相对 来 说 ， 域 间 路 由 表 的 获取 渠道 更 多 。 


上 述 方法 的 一 个 缺点 是 需要 依赖 于 事先 收集 的 路 由 表 前 级 信息 , 因此 无 法 及 时 对 网 络 地 
址 分 配 的 变化 做 出 调整 。 文 献 [13] 提 出 了 一 种 自 组 织 分 布 化 的 前 级 匹配 方法 。 每 个 节点 将 自 
己 IP 地 址 的 掩 码 , 或 是 随机 的 k 比特 哈 希 成 一 个 键 值 ， 然 后 将 自己 的 他 地址 存储 在 分 布 式 
喻 希 表 系 统 中 该 键 值 对 应 的 节点 上 。 这 样 ， 一 个 新 加 入 的 节点 可 以 很 容易 找到 与 自身 人 P 共 
有 相同 IP 前 级 的 节点 。 该 方法 不 需要 依赖 预 处 理 的 IP 地 址 前 级 集合 ， 是 一 个 完全 自 组 织 和 
自 适 应 的 系统 ， 但 需要 维护 一 个 分 布 式 哈 希 表 。 

一 类 更 粗 粒 度 的 邻近 度 估计 方法 是 将 IP 地 址 映射 到 自治 系统 号 码 ， 从 而 可 以 判断 不 同 
的 节点 是 否 位 于 同一 个 自治 系统 ,将 PP 映射 到 自治 系统 号 可 以 通过 BGP 的 路 由 表 实 现 .BGP 
的 路 由 表 保 存 了 IP 地 址 前 绥 到 达 某 个 自治 系统 的 路 径 (AS 路 径 )。AS 路 径 中 的 第 一 个 自治 


3 round trip time, RIT 
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系统 被 称 为 IP 地 址 前 级 的 源 自治 系统 。 综合 多 个 边界 网 关 协 议 路 由 表 可 以 构建 出 IP 地 址 前 
级 和 源 自治 系统 的 映射 表 。 给 定 一 个 IP 地 址 ， 通 过 最 长 前 级 匹配 即 可 找到 对 应 的 自治 系统 
号 但 。 


4.1.3 基于 运营 商 提供 的 信息 


上 述 方案 都 是 由 内 容 提 供 商 或 第 三 方 通过 反 向 工程 的 方法 来 感知 网 络 节 点 的 相对 距离 。 
实际 上 ， 网 络 运营 商 是 提供 网 络 拓扑 和 网 络 状态 信息 的 最 佳 者 。 近 来 ， 开始 出 现 了 由 网 络 运 
营 商 提供 位 置信 息 服 务 的 技术 提案 。 但 由 于 这 涉及 网 络 运 营 商 和 内 容 提 供 商 的 相互 协作 ， 因 
此 提供 松 耦 合 、 可 扩展 、 安 全 、 通 用 和 有 共有 相对 灵活 性 的 标准 化 服务 接口 是 这 类 方法 的 基本 


P4P9 是 这 类 技术 的 典型 代表 ， 它 允许 应 「 入 日 追踪 服务 器 
用 与 网 络 提 供 商 之 间 有 效 地 合作 ， 在 提高 或 Us 
者 保持 对 等 传输 的 应 用 层 性 能 的 前 提 下 , 更 || 
有 效 和 公平 地 利用 网 络 资源 。 


P4P 架构 提出 在 网 络 运营 商 网 络 中 部 署 
ee (appTracen) 

一 种 入 口 追 踪 服 务 器 iTracker, 这 种 设备 收集 

网 络 运营 商 网 络 的 信息 ， 并 提供 与 对 等 传输 图 4. P4P 控制 层 的 实体 和 信息 流 

应 用 交互 的 接口 。 这 些 接口 包括 : 静态 网 络 

策略 (policy)、 反 映 网 络 策略 和 网 络 状 态 的 P4P 距离 (P4P distances)、 网 络 能 力 (如 绥 存 等 )。 

这 些 接口 能 够 支持 外 部 应 用 获得 网 络 运 营 商 网 络 的 相关 信息 ， 同 时 保护 了 网 络 运营 商 的 隐 

私 ， 从 而 实现 网 络 运 营 商 和 内 容 提 供 商 联合 优化 他 们 各 自 的 网 络 性 能 。 图 4 给 出 了 一 个 P4P 

的 控制 层 的 实体 和 信息 流 描述 。 其 中 ，appTracker 是 对 等 传输 应 用 的 Tracker (追踪 器 ， 用 

于 记录 下 载 名 单 ) 设 备 , 它 与 iTracker 交互 并 将 P4P 控制 层 的 信息 转发 给 对 等 传输 应 用 节点 。 


目前 ， 已 经 成 立 了 P4P 工作 组 来 推动 P4P 的 标准 化 工作 。 这 得 到 了 美国 部 分 网 络 运营 
商 和 内 容 提供 商 的 欢迎 。 但 是 P4P 仍然 面临 着 挑战 ， 主 要 是 网 络 运营 商 和 内 容 提供 商 是 否 
有 足够 的 动力 合作 并 采用 P4P 体系 结构 还 是 个 问题 。P4P 架构 目前 也 尚未 解决 如 何以 一 种 可 
“ 展 和 高 效 的 方式 实现 的 问题 。 


z 


b= 


~ 网 络 匹配 服务 (Network Matching Service: NMS) 是 中 科 院 计算 所 、 电 信 研 究 院 及 各 主要 

网 络 运 营 商 向 中 国 通信 标准 化 协会 (CCSA) 提出 的 《基于 承载 网 感知 的 P2P 流量 优化 技术 
框架 》 史 标准 的 主要 技术 ， 目 前 已 经 成 为 国家 通信 行业 报批 稿 。 该 框架 定义 了 一 种 提供 信 
息 帮 助 对 等 传输 应 用 进行 决策 的 服务 , 称 为 网 络 匹 配 服 务 。 图 5 是 网 络 匹 配 服务 的 基本 架构 ， 
其 中 包括 了 承载 网 信息 提供 者 、 网 络 匹 配 服务 器 、 网 络 匹 配 服 务 发 现 服务 器 和 网 络 匹配 服务 
客户 等 功能 实体 。 


网 络 匹 配 服务 客户 可 以 是 一 般 的 对 等 传输 主机 或 对 等 传输 索引 服务 器 , 它 被 授权 访问 一 
些 网 络 匹配 服务 器 。 网 络 匹配 服务 客户 可 以 利用 网 络 匹配 服务 实现 资源 提供 节点 的 优化 选 
择 、 优 化 对 等 传输 网 络 拓扑 、 优 化 中 继 节点 或 缓存 节点 的 选择 等 。 网 络 匹 配 服 务 器 是 由 网 络 
运营 商 实现 和 部 署 的 用 于 提供 网 络 匹配 服务 的 实体 。 一 个 网 络 运营 商 可 以 在 自己 的 网 络 内 自 
主 地 部 署 一 个 或 多 个 网 络 匹 配 服务 器 。 每 个 网 络 匹配 服务 器 可 以 制定 策略 规定 向 哪些 对 等 传 
答应 用 和 哪些 对 等 传输 主机 授与 访问 权限 。“ 网 络 匹 配 服务 发 现 服务 器 ”的 功能 是 发 现 网络 
匹配 服务 器 ,提供 注册 服务 。 网 络 运营 商 将 自己 的 网 络 匹配 服务 器 的 地 址 和 策略 注册 到 网 络 
匹配 服务 发 现 服务 器 上 。 对 等 传输 主机 通过 网 络 匹配 服务 发 现 服务 器 找到 对 自己 授权 的 网 络 


亚 


匹配 服务 器 。 实 现 网 络 匹配 服务 所 需 的 网 络 拓扑 、 网 络 策略 、 网 络 能 力 、 网 络 动态 等 信息 通 


过 承载 网 提供 ， 这 里 所 说 的 “承载 网 ” 特 指 网 络 运营 商 或 它 的 代理 程序 。 


P2P 应 用 


[ee 
客户 


对 等 传输 流量 优化 技术 古 


S 


| 服务 发 现 | 网 络 匹 配 服务 


请 求 /应 答 。| 发 现 服务 器 
人 
J/ ， 服 务 注册 / 。 网 络 匹配 服务 设施 


状态 查询 


. 网 络 信息 供应 


承载 网 信息 


提供 者 


图 5. 网 络 匹 配 服务 的 基本 架构 


4.2 位 置 感知 的 拓扑 构建 


获取 位 置信 息 的 主要 目 


的 是 为 了 构建 位 置 感知 的 履 盖 拓 扑 。 在 存在 Tracker 的 系统 中 (如 


BT 和 PPLive)，Tracker 维护 了 参与 当前 会 话 的 节点 。 当 一 个 节点 尝试 加 入 或 希望 进行 邻居 


替换 时 ， 会 


可 Tracker 请 求 候选 邻居 集合 。Tracker 可 以 根据 位 置信 息 为 请 求 节点 分 配 一 组 位 
置 相近 的 候选 节点 。 对 等 传输 应 用 节点 也 可 在 运行 过 程 中 依据 探测 的 信息 自主 地 优化 自身 的 


拓扑 。 运 营 商 可 以 通过 部 署 Proxy-Tracker 的 方式 来 辅助 应 用 节点 建立 位 置 感知 的 拓扑 。 


Proxy-Tracker 部 署 在 一 个 网 络 的 边界 ， 维 护 本 网 络 参与 某 个 对 等 传输 会 话 的 节点 信息 。 


Proxy-Tracker 截获 对 等 传输 应 用 的 Tracker 发 送 给 节点 的 候选 邻居 响应 消息 ， 修 改 候选 邻居 


集合 , 将 一 些 距 请 求 节点 位 置 较 远 的 节点 蔡 换 成 与 请 求 节 点 位 于 同一 网 络 内 的 节点 ， 从 而 辅 


助 请 求 节点 建立 位 置 感知 的 拓扑 。 网 络 运营 商 还 可 以 通过 提供 重 定向 服务 器 实现 位 置 感知 的 
拓扑 构建 。 重 定向 服务 器 维 
的 连接 或 数据 请 求 ， 并 重 定向 连接 或 数据 请 求 。 
5 “对 等 传输 数据 调度 算法 


数据 调度 算法 是 优化 对 等 传输 流量 的 另 一 选择 。 但 针对 数据 调度 算法 的 研究 通常 是 从 应 


用 层 性 能 提升 的 角度 日 


护 本 域内 的 对 等 传输 应 用 节点 信息 和 拥有 的 对 象 信息 , 截获 用 户 


发 的 , 没有 考虑 对 底层 网 络 运 营 商 的 影响 。 数据 调 度 算法 对 第 三 代 的 


对 等 传输 内 容 分 发 技术 ( 即 原 文件 被 划分 成 多 个 数据 块 ， 贡 点 构成 协作 网 络 来 完成 原文 件 的 


分 发 ) 有 效 


。 这 类 系统 


息 ) 来 进行 决策 ， 确 定 需要 
稀缺 优先 (local rarest first〉 调 度 和 最 近 新 兴 的 基于 网 络 编码 的 调度 L111，。 

单 靠 数据 调度 算法 无 法 优化 对 等 传输 流量 , 必须 结合 位 置 感知 的 下 载 策略 才能 实现 优化 
流量 的 目标 。 图 6 说 明了 三 


有 节点 A 拥 


有 数据 块 a、b、c、d。 图 6(a) 采 用 随机 下 载 决 策 ， 节 点 B、C、D、 王 可 能 同时 


P， 贡 点 通常 具 基 于 邻居 节点 的 局 部 信息 《〈 即 自身 和 邻居 的 数据 块 信 


下 载 哪个 数据 块 。 典 型 的 数据 调度 算法 包括 : 随机 调度 、 局 部 最 


种 不 同 的 数据 调度 算法 对 对 等 传输 流量 的 影响 。 假设 初始 时 刻 只 


向 节点 A 请 求 同 一 个 数据 块 ， 如 数据 块 a。 这 将 导致 B、C、D、E 之 间 的 连接 在 接 下 来 的 


数据 传输 周 


期 内 无 法 被 利用 。 图 6(b) 采 用 局 部 最 稀缺 优先 策略 进行 下 载 决 策 ， 但 即使 如 此 ， 


Yj A 
于 8 卷 第 


向 A 请 求 数 扫 


3 期 


信息 技术 快报 
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编码 的 编码 数据 块 。 当 有 限 域 足够 大 时 ， 
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也 会 导致 数据 分 布 的 不 均匀 , 例如, 节点 B 先 向 节点 A 请 求 数据 块 a 然后 节点 C 向 节点 A 
请 求 数据 块 ， 根 据 局 部 最 稀缺 优先 策略 ， 则 节点 C 可 以 向 节点 A 请 求 数据 块 b, 然后 节点 D 
居 。 依 据 该 策略 ， 节 点 D 可 能 会 向 节点 A 请 求 数据 块 a， 同样， 节点 卫 可 能 向 
节点 A 请 求 数据 块 b。 这 样 ，B、C、D、E 只 拥有 数据 块 a 和 b， 在 经 过 另 一 个 传输 周期 后 ， 
它们 之 间 的 域内 链 路 将 无 法 利用 ， 新 数据 只 能 从 节点 A 获取 。 图 6(c) 是 采用 网 络 编码 的 情 
况 ， 节 点 A 分 别 向 节点 BB、C、D、E 发 送 随 机 线 怕 


如 了 F(28) 或 FC216)， 即 可 保证 传输 给 节点 B、C、D、E 的 四 个 数据 块 以 很 高 的 概率 线性 无 关 。 


这 样 ， 节 点 B、C、D、EE 可 以 通过 域内 链 路 完成 数据 的 传输 从 而 解码 出 原始 数据 块 ， 实 现 
最 优化 的 资源 利用 。 


研究 表明 55， 在 同样 的 


图 6. 数据 调度 算法 对 对 等 传输 流量 优化 的 作用 
(a) 随 机 调度 策略 ，(b) 局 部 最 稀缺 优先 策略 ，(QO) 网 络 编码 


域 间 流量 匈 余 度 能 比 基 于 随机 数据 调度 产生 的 域 间 
流量 元 余 度 降低 80%~90%。 但 即使 是 位 置 感知 能 力 


最 强 的 设置 ， 基 于 


局部 最 稀缺 优先 的 数据 调度 的 域 


间 流 量 宛 余 度 依然 在 3.0 以 上 ， 即 平均 每 个 数据 块 
要 进入 一 个 域 3 次 以 上 。 我 们 在 同样 的 位 置 感知 能 
力 支持 下 ， 对 比 了 基于 局 部 最 稀缺 优先 的 数据 调度 


和 基于 网 络 编码 的 数据 调度 在 对 等 传输 流量 优化 上 


的 作用 。 我 们 的 实验 以 中 国 AS 拓扑 的 4-core 作为 
底层 的 AS 拓扑 ， 系 统 包 含 1000 个 节点 ， 节 点 平均 
度 为 10。 实 验 结 果 如 图 7 所 示 ， 当 位 置 感知 能 力 增 


强 时 ，7 


丙种 数据 调度 算法 产生 的 域 间 流量 都 出 现 了 


明显 的 下 降 。 但 当 位 置 感知 能 力 并 不 太 弱 时 ， 网 络 


编码 所 导致 的 域 间 流量 元 祭 度 低 于 局 部 最 稀缺 优先 
调度 算法 的 一 半 。 


6 比较、 总 结 和 展望 
6.1 比较 


对 等 传输 缓存 、 位 置 感知 技术 和 数据 调度 算法 号 


三 者 在 适用 性 、 独 立 色 


新 置 感知 能 力 支 持 下 ， 基 于 局 部 最 稀缺 优先 的 数据 调度 产生 的 


域内 邻居 比例 


图 7. 网 络 编码 和 局 部 最 稀缺 优先 数据 


调度 策略 产生 的 域 间 数据 见 余 度 


性 和 实现 方 的 区 别 。 


E 和 技术 的 实现 方法 上 有 所 区 别 。 表 2 总 结 了 三 种 技术 在 适用 


有 然 都 可 以 用 


优化 对 等 传输 流量 , 但 是 
站 < 独立 


一 


对 等 传输 流量 优化 技术 研究 


测 
~ 
al 


司 的 对 等 传输 流量 优化 技术 在 适用 性 、 可 独立 使 用 性 和 实现 方 的 区 别 
对 等 传输 缓存 位 置 感知 技术 数据 调度 


适用 于 所 有 对 等 传输 应 用 ;但 | 适用 于 所 有 对 等 传 | 仅 适 用 于 BT 和 PPLive 等 存在 
随 着 对 等 传输 网 络 位 置 感知 能 | 输 应 用 合作 下 载 网 络 的 应 用 
力 


的 增强 ， 有 效 性 将 降低 


可 独立 使 用 可 独立 使 用 需要 和 位 置 感知 技术 结合 使 用 
网 络 运营 商 网 络 运营 商 、 内 容 
提供 商 或 第 三 方 


6.2 总 结 和 展望 


对 等 传输 流量 优化 是 对 等 传输 应 用 得 以 健康 、 良 性 和 可 持续 发 展 的 前 提 。 本 文 从 对 等 传 
输 缓存 技术 、 位 置 感知 技术 和 数据 调度 算法 三 个 角度 综述 了 不 同 的 技术 对 优化 对 等 传输 流量 


的 作用 。 


虽然 对 等 传输 流量 优化 目前 在 理论 上 的 研究 已 经 取得 了 长 足 的 进展 , 但 是 被 网 络 运 营 商 


和 内 容 提供 商 的 广泛 采用 还 要 经 过 一 段 努 力 。 一 方面 , 许多 理论 技术 的 有 效 性 仅 通过 仿真 试 
验 得 到 验证 ,缺乏 在 互联 网 上 大 规模 的 实际 测量 结果 。 真 正 的 互联 网 环境 下 ， 网 络 地 址 转换 
(Network Address Translation， NAT) 和 防火 墙 的 存在 可 能 会 大 幅 降 低位 置 感知 能 力 的 效果 。 


因而 , 在 实际 的 互联 网 上 进行 大 规模 的 测试 评估 成 为 验证 位 置 感知 技术 对 对 等 传输 流量 优化 


有 效 性 程度 的 迫切 任务 。 另 一 方面 ， 在 技术 可 行 的 前 提 下 ， 如 何 建立 适合 网 络 运 营 商 、 内 容 


提供 商 、 终 端 用 户 之 间 的 商业 模型 是 推动 该 技术 的 关键 。 
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